Sầm Lệ Hương sinh ra và lớn lên ở Vancouver, Canada. Cô xuất thân trong một gia đình người Canada gốc Hoa, cha mẹ cô là người Việt gốc Hoa di cư sang Canada, tổ tiên của cô có nguồn gốc từ Quảng Đông, Quảng Châu và Phúc Kiến. Cô còn là một tín đồ Kitô giáo.

Trong một bài phát biểu, Sầm Lệ Hương nói về việc bản thân nói tiếng Quảng Đông rất yếu, nên cô đã dành một năm để rèn luyện và cải thiện tiếng Quảng Đông của mình, và phải mất đến 7 năm để học nói lưu loát được tiếng Quảng Đông.

Sầm Lệ Hương tốt nghiệp Đại học Bách khoa Kwantlen với ba tấm bằng cử nhân về thiết kế thời trang, quản trị marketing và quản trị nhân sự.[2] Cô là một giáo viên tiếng Anh trước khi tham gia cuộc thi Hoa hậu người Hoa Quốc tế.